python -m torch.distributed.launch --nproc_per_node=4 --master_port 18211 --use_env main_imagenet.py --model regnet_x_1_6gf --epochs 60 --batch-size 256 --wd 0.00005 --lr 0.04 --lr-scheduler=cosineannealinglr --lr-warmup-method=linear --prune --cache-dataset --method group_sl --global-pruning --pretrained --output-dir run/imagenet/regnet_x_1_6gf_gsl --target-flops 0.8 --max-pruning-ratio 0.7 --sl-epochs 60 --sl-lr 0.04 --cache-dataset --reg 1e-4 --amp --data-path ~/Datasets/imagenet &> run/imagenet/regnet_gsl.log